Evaluación de Sistemas de Búsqueda de Respuestas con restricción de tiempo

نویسندگان

  • Fernando Llopis
  • Elisa Noguera
  • Antonio Ferrández Rodríguez
  • Alberto Escapa
چکیده

Previous works on evaluating the performance of Question Answering (QA) systems are focused in the evaluation of the precision. Nevertheless, the importance of the answer time never has been evaluated. In this paper, we developed a mathematic procedure in order to explore new evaluation measures in QA systems considering the answer time. Also, we carried out an exercise for the evaluation of QA systems within a time constraint in the CLEF-2006 campaign, using the proposed measures. The main conclusion is that the evaluation of QA systems in realtime can be a new scenario for the evaluation of QA systems.

برای دانلود متن کامل این مقاله و بیش از 32 میلیون مقاله دیگر ابتدا ثبت نام کنید

ثبت نام

اگر عضو سایت هستید لطفا وارد حساب کاربری خود شوید

منابع مشابه

Arquitectura multilinge de sistemas de búsqueda de respuestas basada en ILI y Wikipedia

Arquitectura multilingüe de sistemas de búsqueda de respuestas basada en ILI y Wikipedia

متن کامل

Predicción de Múltiples Puntos de Series de Tiempo Utilizando Support Vector Machines

Se presenta la evaluación de la predicción de múltiples puntos de series de tiempo, mediante un corrimiento de ventana para Support Vector Machines (SVM) con dos funciones de kernel distintas (lineal y con base radial). Para la evaluación se utilizó un conjunto de treinta series de diferente origen y comportamiento dinámico. Se encuentra que la SVM posee una buena capacidad para ajustarse a las...

متن کامل

Acute Effects of Restraint, Shock and Training in the Elevated T-maze on Noradrenaline and Serotonin Systems of the Prefrontal Cortex

La corteza prefrontal (CPF) participa en las funciones cognitivas y la regulación del estrés. Las concentraciones de noradrenalina (NA) y serotonina (5-HT) en algunas regiones en el sistema nervioso central son modificadas por el estrés agudo. El efecto depende del estresor y del tiempo que transcurra entre el estresor y la evaluación. El objetivo del presente estudio fue evaluar el efecto agud...

متن کامل

La Búsqueda de Respuestas: Estado Actual y Perspectivas de Futuro

The increasing demand of systems that respond in a precise way users information needs has fostered a new investigation eld: Question A nswering (QA). The objective of this investigation goes beyond the retrieval of relevan t documents carried out by traditional Information R etrieval systems (IR). QA systems tackle the problem of locating, extracting and presenting to the user just only the re...

متن کامل

ذخیره در منابع من


  با ذخیره ی این منبع در منابع من، دسترسی به آن را برای استفاده های بعدی آسان تر کنید

برای دانلود متن کامل این مقاله و بیش از 32 میلیون مقاله دیگر ابتدا ثبت نام کنید

ثبت نام

اگر عضو سایت هستید لطفا وارد حساب کاربری خود شوید

عنوان ژورنال:
  • Procesamiento del Lenguaje Natural

دوره 39  شماره 

صفحات  -

تاریخ انتشار 2007